ABテストの行動分析に役立つMixpanelのエクスペリメントを解説！

MixpanelのExperimentsレポートがいまいち分かってない方向けの記事です。

マーテック(MarTech)

#mixpanel

國崎

2023.05.08

この記事は公開されてから1年以上経過しています。情報が古い可能性がありますので、ご注意ください。

ミックスパネラーの國崎です。
今回はABテストの行動分析に役立つMixpanelのExperimentsレポートについて紹介します。

Experimentsレポートとは？

Mixpanelのレポートの1つで、ABテストを行った際の各イベント間の比較やコホート（またはプロパティ）間の比較ができます。
これを活用することで、ABテストをした結果どちらの人がどのイベントにどのくらい効果的だったのか、などの分析ができるようになります。

ABテスト計測するための実装コード

ExperimentsレポートでABテストの計測をするためには、以下専用のコードを埋め込まないといけません。

mixpanel.track('$experiment_started', {
'Experiment name': 'Test', 
'Variant name': 'v1'
})

「Experiment name」と「Variant name」は計測されるイベントの値になるため、好きな名前に変えてOKです。
ABテストでの比較をしたい場合は、AB間での「Experiment name」は同じで「Variant name」だけ変更するようにします。

今回は例として以下のVariant nameでABテストをしようと思います。

Experiment name	Variant name	内容
Test	v1	.button--primaryのボタンをクリックした人
Test	v2	.quick-add__submitのボタンをクリックした人

上記の実装をする際は、javascriptのコードを以下のように書きます。

document.addEventListener('DOMContentLoaded', () => {
  const trackExperiment = (buttonSelector, variantName) => {
    const button = document.querySelector(buttonSelector);

    if (button) {
      button.addEventListener('click', () => {
        mixpanel.track('$experiment_started', {
          'Experiment name': 'Test',
          'Variant name': variantName,
        });
      });
    }
  };

  trackExperiment('.button--primary', 'v1');
  trackExperiment('.quick-add__submit', 'v2');
});

このコードを計測するサイトに埋め込んで、「.button--primaryのボタンをクリックした人」と「.quick-add__submitのボタンをクリックした人」で、他のイベントにどのように差が出るのか、MixpanelのExperimentsレポートで確認してみます。